- Überblick
- Über die UI-Automatisierungsaktivitäten
- UI-Automatisierung (UI Automation)
- UI-ANA-016 – URL zum Öffnen eines Browsers abrufen
- UI-ANA-017 – ContinueOnError True
- UI-ANA-018 – OCR-/Bildaktivitäten auflisten
- UI-DBP-006 – Containernutzung
- UI-DBP-013 – Falscher Gebrauch von Excel-Automatisierung
- UI-DBP-030 – Verwendung unzulässiger Variablen in Selektoren
- ST-DBP-021 – Hartcodiertes Timeout
- UI-PRR-001 – Klick simulieren
- UI-PRR-002 – Typ simulieren
- UI-PRR-003 – Offener Anwendungsmissbrauch
- UI-PRR-004 – Hartcodierte Verzögerungen
- UI-REL-001 – Große IDX in Selektoren
- UI-SEC-004 – Selektor-E-Mail-Daten
- UI-SEC-010 – App-/URL-Einschränkungen
- UI-USG-011 – Nicht zulässige Attribute
- SY-USG-013 – Private Datei aufrufen
- SY-USG-014 – Falsche Platzhalter für Ausführungsvorlage
- Mit UI-Automatisierung automatisierte Anwendungen und Technologien
- UiPath-Browsermigrationstool
- Computer Vision Recorder
- Klicken (Click)
- Darauf zeigen (Hover)
- Sicheren Text eingeben (Type Secure Text)
- Hotkey senden (Send Hotkey)
- Eingeben in (Type Into)
- Prüfen (Check)
- Objekt auswählen (Select Item)
- Mehrere Objekte auswählen (Select Multiple Items)
- Text erhalten (Get Text)
- Text einstellen (Set Text)
- Aktivieren (Activate)
- Markieren (Highlight)
- Fokus legen auf (Set Focus)
- Ankerbasis (Anchor Base)
- Kontextbewusster Anker
- Relatives Element finden (Find Relative Element)
- Auf Bildschirm anzeigen (Indicate On Screen)
- Element vorhanden (Element Exists)
- Element finden (Find Element)
- Warten, bis Element verschwindet (Wait Element Vanish)
- Untergeordnete Elemente finden (Find Children)
- Vorgänger-Element erhalten (Get Ancestor)
- Elementumfang (Element Scope)
- Attribut erhalten (Get Attribute)
- Ausschneidebereich einstellen (Set Clipping Region)
- Position erhalten (Get Position)
- Screenshot anfertigen (Take Screenshot)
- Attribut abwarten (Wait Attribute)
- Auf Element erscheinen (On Element Appear)
- Auf Element verschwinden (On Element Vanish)
- Text anklicken (Click Text)
- Text beim Darauf zeigen (Hover Text)
- Textposition finden (Find Text Position)
- Volltext erhalten (Get Full Text)
- Sichtbaren Text erhalten (Get Visible Text)
- Strukturierte Daten extrahieren (Extract Structured Data)
- Text vorhanden (Text Exists)
- OCR-Text anklicken (Click OCR Text)
- Auf OCR-Text zeigen (Hover OCR Text)
- OCR-Text erhalten (Get OCR Text)
- OCR-Textposition finden (Find OCR Text Position)
- Microsoft OCR
- Microsoft Project Oxford Online OCR
- Microsoft Azure ComputerVision OCR
- Tesseract OCR
- Google Cloud Vision OCR
- OCR-Text vorhanden (OCR Text Exists)
- Bild anklicken (Click Image)
- Auf Bild zeigen (Hover Image)
- Bildübereinstimmung finden (Find Image Matches)
- Bild vorhanden (Image Exists)
- Bild finden (Find Image)
- Warten, bis Bild verschwindet (Wait Image Vanish)
- Auf Bild erscheinen (On Image Appear)
- Auf Bild verschwinden (On Image Vanish)
- Bild laden (Load Image)
- Bild speichern (Save Image)
- Browser anhängen (Attach Browser)
- Registerkarte schließen (Close Tab)
- Zurück (Go Back)
- Weiter (Go Forward)
- Zur Startseite (Go Home)
- JS-Skript einfügen (Inject JS Script)
- Navigieren zu (Navigate To)
- Browser öffnen (Open Browser)
- Browser aktualisieren (Refresh Browser)
- Web-Attribut setzen (Set Web Attribute)
- Fenster anhängen (Attach Window)
- Fenster schließen (Close Window)
- Aktives Fenster abrufen (Get Active Window)
- Fenster ausblenden (Hide Window)
- Fenster maximieren (Maximize Window)
- Fenster minimieren (Minimize Window)
- Fenster verschieben (Move Window)
- Fenster wiederherstellen (Restore Window)
- Fenster anzeigen (Show Window)
- Export UI Tree
- ActiveX-Methode aufrufen
- .NET-Code einfügen
- Trigger anklicken (Click Trigger)
- Tastendruck-Trigger (Key Press Trigger)
- Bild-Trigger anklicken (Click Image Trigger)
- System-Trigger (System Trigger)
- Hotkey-Trigger (Hotkey Trigger)
- Maus-Trigger (Mouse Trigger)
- Ereignisinfo erhalten (Get Event Info)
- Ereignisse überwachen (Monitor Events)
- Quellelement erhalten (Get Source Element)
- Benutzerereignis wiedergeben (Replay User Event)
- Benutzeingabe blockieren (Block User Input)
- Vordergrund verwenden
- Element Attribute Change Trigger
- Element State Change Trigger
- Textfeld (Callout)
- Ausgewählten Text kopieren (Copy Selected Text)
- Aus Zwischenablage erhalten (Get From Clipboard)
- Auf Zwischenablage setzen (Set To Clipboard)
- Anwendung schließen (Close Application)
- Anwendung öffnen (Open Application)
- Prozess starten (Start Process)
- Passwort erhalten (Get Password)
- Tooltip
- Click Picture on Screen
- Click Toolbar Button
- Read Statusbar
- Select Dates In Calendar
- Select Menu Item
- Expand Tree
- Call Transaction
- SAP Logon
- SAP Login
- Table Cell Scope
- SAP Session Attributes Change Trigger
- Expand ALV Tree
- Expand ALV Hierarchical Table
- Use Application/Browser
- Check App State
- Check/Uncheck
- Klicken (Click)
- Extract Table Data
- Text erhalten (Get Text)
- Get URL
- Zu URL wechseln
- Markieren (Highlight)
- Darauf zeigen (Hover)
- Tastenkombinationen
- Navigate Browser
- Objekt auswählen (Select Item)
- Screenshot anfertigen (Take Screenshot)
- Eingeben in (Type Into)
- Attribut erhalten (Get Attribute)
- Get Browser Data
- Set Browser Data
- Mouse Scroll
- Inject Js Script
- Ziehen und Ablegen
- For Each UI Element
- Application event trigger
- Click Event Trigger
- Keypress Event Trigger
- Text einstellen (Set Text)
- Check Element
- Formular ausfüllen
- Anhängen
- Prüfen (Check)
- Klicken (Click)
- Ziehen und Ablegen
- Daten extrahieren
- Attribut erhalten (Get Attribute)
- GetChildren
- GetRuntimeTarget
- GetText
- Get URL
- GoToUrl
- Markieren (Highlight)
- Darauf zeigen (Hover)
- Ist aktiviert
- Tastaturkürzel (Keyboard Shortcut)
- Mouse Scroll
- Offen
- Objekt auswählen (Select Item)
- Screenshot anfertigen (Take Screenshot)
- Eingeben in (Type Into)
- Wartestatus
- Führen Sie eine Browsersuche durch und rufen Sie Ergebnisse mithilfe von UIAutomation-APIs ab
- Web-Browsing
- Finden von Bildern
- Klicken auf Bilder
- Auslösen und Überwachen von Ereignissen
- Erstellen und Überschreiben von Dateien
- HTML-Seiten: Extrahieren und Bearbeiten von Informationen
- Bearbeiten von Fenstern
- Automatisierte Listenauswahl
- Finden und Bearbeiten von Fensterelementen
- Verwalten der Textautomatisierung
- Laden und Verarbeiten von Bildern
- Verwalten von mausaktivierten Aktionen
- Automatisieren der Anwendungslaufzeit
- Automatisierte Ausführung einer lokalen Anwendung
- Browsernavigation
- Web-Automatisierung
- Beispiel für Trigger Scope
- Computer Vision Local Server
- Mobile Automation
- Versionshinweise
- Projektkompatibilität
- Get Log Types
- Get Logs
- Get Page Source
- Get Device Orientation
- Get Session Identifier
- Install App
- Manage Current App
- Manage Other App
- DeepLink öffnen
- Open URL
- Mobile Device Connection
- Positional Swipe
- Press Hardware Button
- Set Device Orientation
- Screenshot anfertigen (Take Screenshot)
- Take Screenshot Part
- Element vorhanden (Element Exists)
- Execute Command
- Attribut erhalten (Get Attribute)
- Get Selected Item
- Text erhalten (Get Text)
- Set Selected Item
- Text einstellen (Set Text)
- Wischen
- Tap
- Type Text
- Muster zeichnen
- Terminal
- Versionshinweise
- Über das Terminal-Aktivitätspaket
- Projektkompatibilität
- Terminalsitzung (Terminal Session)
- Bildschirmbereich erhalten (Get Screen Area)
- Text an Position erhalten (Get Text at Position)
- Get Color At Position
- Feld an Position erhalten (Get Field at Position)
- Feld an Position setzen (Set Field at Position)
- Warte auf Text an Position (Wait Text at Position)
- Tasten senden (Send Keys)
- Cursor bewegen (Move Cursor)
- Sichere Tasten senden (Send Keys Secure)
- Text erhalten (Get Text)
- Find Text
- Move Cursor to Text
- Strg-Taste senden (Send Control Key)
- Feld erhalten (Get Field)
- Warte auf Bildschirmtext (Wait Screen Text)
- Warte auf Feldtext (Wait Field Text)
- Feld setzen (Set Field)
Über die UI-Automatisierungsaktivitäten
UI-Automatisierungsaktivitäten ermöglichen Ihnen die Interaktion mit Elementen der grafischen Benutzeroberfläche in Softwareanwendungen. Zu diesen Aktivitäten gehören das Klicken auf Schaltflächen, Eingeben in Textfelder, Auswählen aus Dropdownmenüs und vieles mehr. Dies geschieht durch den Einsatz von UiPath-Robotern, die Aufgaben auf die gleiche Weise wie ein menschlicher Benutzer ausführen, was die Automatisierung komplexer Geschäftsprozesse und sich wiederholender Aufgaben erleichtert.
Bei der Automatisierung von Benutzeroberflächen besteht die erste Phase darin, die logische Abfolge von Schritten zu verstehen, die ein menschlicher Benutzer ausführen würde. In der nächsten Phase werden diese Schritte in Aktivitäten umgewandelt und konfiguriert. UI-Automatisierungsaktivitäten können als Container, Eingabe-, Ausgabe- und Synchronisierungsaktivitäten dienen, während die Aktivitätseigenschaften bestimmen, wie die Actions-Roboter eine Aktion ausführen.
Die UI-Automatisierungsaktivitäten umfassen die folgenden Pakete:
- UI-Automatisierung (UI Automation)
- Computer Vision Local Server
- Mobile Automation
- Terminal
Verwenden Sie die folgende Tabelle, um die Kompatibilität zwischen der Plattform und den Aktivitätspaketen zu identifizieren:
Aktivitätspaket | Windows – Studio-Legacy-Projekte | Windows Studio-Projekte (modern) | Plattformübergreifende Studio-Projekte |
---|---|---|---|
UI-Automatisierung (UI Automation) |
|
|
|
Computer Vision Local Server |
|
|
|
Mobile Automation |
|
|
|
Terminal |
|
|
|
Das UIAutomation -Aktivitätspaket bietet eine umfangreiche Reihe von Funktionen zur Simulation von menschlichem Verhalten. Sie bietet leistungsstarke und umfassende Funktionen, die die Produktivität steigern, indem sie Automatisierungen für die Benutzeroberfläche erstellen, Zeit sparen und Fehler minimieren. Einige der häufigsten Anwendungsfälle sind:
- Automatisierung von Geschäftsprozessen, z. B. Kundenservice, Buchhaltung, Auftragsbearbeitung, Mitarbeiter-Onboarding usw.
- Web-Scraping, wie Kundenfeedback-Analyse, Preisvergleich, Lead-Generierung, Produktbewertungs-Scraping usw.
- Automatisierte Tests auf Benutzeroberflächen, um sicherzustellen, dass die Anwendungen ordnungsgemäß funktionieren
Weitere Informationen finden Sie im AbschnittUI-Automatisierungspaket .
Das Paket „ Computer Vision Local Server “ enthält keine Aktivitäten, aber nach der Installation in einem Projekt können Sie einen lokalen AI Computer Vision-Server verwenden.
AI Computer Vision ist eine KI-Fähigkeit, die es allen UiPath-Robotern ermöglicht, den Bildschirm zu erfassen und alle UI-Elemente visuell zu identifizieren, anstatt sich auf Selektoren oder Bilder zu verlassen. Es handelt sich um einen Algorithmus, der eine menschenähnliche Erkennung von Benutzeroberflächen ermöglicht, indem eine Mischung aus KI, OCR, Text-Fuzzy-Matching und einem Ankersystem alles miteinander verknüpft.
Weitere Informationen finden Sie im AbschnittPaketabschnitt Computer Vision Local Server .
Das Mobile Automation -Aktivitätspaket bietet eine robuste Reihe von Aktivitäten zum Automatisieren von Tests und Interaktionen mobiler Anwendungen. Sie bietet Tools zum Testen von Android- und iOS-Anwendungen und ermöglicht unter anderem Actions wie Tippen, Wischen, Eingeben von Text und Validieren mobiler Elemente. Zu den wichtigsten Funktionen des Aktivitätspakets gehören:
- Plattformübergreifende mobile Automatisierung – Automatisieren Sie mobile Anwendungen auf Android- und iOS-Plattformen
- Interaktion mit mobilen Elementen – Führen Sie Actions wie Tippen, Wischen, Scrollen und Eingeben von Text auf mobilen Zielelementen aus
- Validierung und Verifizierung mobiler Elemente – Validieren Sie die Eigenschaften mobiler Elemente, die erwarteten Werte und behandeln Sie bestimmte Szenarien
- Mobilgeräteverwaltung – Geräteinformationen erfassen, die Geräteausrichtung verwalten, die Netzwerkkonnektivität steuern, Anwendungen installieren und deinstallieren und gerätespezifische Einstellungen vornehmen
Erste Schritte mit Mobile Automation
Mit dem Terminal -Aktivitätspaket können Sie sich mit einer Vielzahl von Terminalumgebungen über eine Direktverbindung oder Terminal-Emulatoren verbinden.
Anschließend können Sie Aktivitäten verwenden, um Actions wie das Abrufen von Text, Farben, Feldern oder Bildschirmpositionen, das Senden von Tasten, das Bewegen des Cursors oder das Warten auf bestimmte Texte oder Felder als Trigger auszuführen.
Weitere Informationen finden Sie im AbschnittTerminal-Pakete.